Image Oscillation +Heart Beat
https://gyazo.com/bfb577bb92133c7c0bb27ca35be37aa7
https://youtu.be/wSCmsk8f8dc
Image Oscillation + - Heart Beat -
------------------------
☈ 2024.6.12 HEART Beat Session (à Pearl Mansion / 代々木上原)
主催:@one____two____three____
------------------------
☈ TL;DR ☈
心拍数をテーマにした本イベントで展示したものは主に二つで、
〰心拍と同期したアナログオシロスコープ
〰プロジェクターで映されたコントローラブルな映像
(心拍数=会場全体のBPMも表示)
https://gyazo.com/fa6c8007ad1271dce71416b3bb0051a7
心拍と同期したアナログオシロスコープ
☈ 概要
ひとつの肝として、
プロジェクションで映される映像と
アナログオシロスコープに表示される映像は、
コントローラ(PS4コントローラ / MIDIコントローラ)で操作が可能であり、会場のDJと組み合わさることで、インスタレーションとも、ある種の簡易的なVJシステムともいえるようなものになっていますが、
内部的な処理としては
プロジェクションの方は映像信号
アナログオシロスコープの方は音声信号
をソフトウェア的に変位させています
(アナログオシロスコープは音声信号を変位させることで結果として映像になる仕組みで、それはあくまでも会場のDJの音声とは別であり、純粋に内部的な音声信号です)
https://gyazo.com/1cdd9fe1eb723a049e9764e8588667dehttps://gyazo.com/9d82c2f1c67b02ea802649cc4b442a56
https://gyazo.com/672dd96739531aa3d7224e0cf0ee2c94
トークイベントの最中にも心拍計をつけてもらい、彼の感情の変化が会場の音に直接反響する
仕組みは単純だが、実際に行ってみると、自分の心臓の鼓動が自分の外から(音として)やってくる感覚が緊張感を高め、それがまた心臓にフィードバックしていく、不思議な自己=他者感覚があった
☈ 仕組み
基本的に参加者に心拍センサー(アームバンド)をつけてもらい、計測された心拍数をBPMとして心臓音(ドクン)を低音として会場全体に流すようにし、
それと同期するようにプロジェクション映像 / オシロスコープの映像の心臓も動くようにしています。
https://gyazo.com/51b894aa310af824919646c01d5c4f1b
仕組みの構築は主にTouchDesignerを用いており、
Bluetoothの心拍センサーから得た情報をOSC通信でTouchDesignerに送り、それをもとにBPMとして処理し、音 / 映像の再生を同期管理しています。
心拍計からOSC通信するには
が必要です
基本的には以下の記事を参考にしてます
https://gyazo.com/23ff23795429acb0ca3ef121f282d9df
入力する必要があるのは右下の方にある
RemoteAddress
RemotePort
になります。
RemoteAddress の確認方法はネットワークに接続された状態で
ターミナルを開いて ipconfig と入力してでてきたIPv4 アドレスをそのまま入力します。
https://gyazo.com/f5d93d14a0e1e3ffd1281930c2d38cb7
RemotePortについては基本的には何でもいいと思います。
ここは適当に9000と入力しておきます。
TouchDesignerの方で OSC In CHOPのパラメータの
Local Address → ここに上記のRemote Addressをコピペ
Network Port → ここに上記のRemote Portをコピペ
https://gyazo.com/7bc6a4f269c3d79d95d177666b1145bf
するとパラメータがOSC通信にて受け取ることができます。
それで受け取ったBPMの情報をもとに心臓の音を再生するようにします。
https://gyazo.com/f8741b4cc4dd17819f9bf25d853f5a4c
osc in CHOPのNetwork PortおよびOSC HeartRateSenderのRemote Portの数値を変えれば複数のOSCを受け取ることができる(はず)
動作確認Version
Touch Designer 2023.11760
☈ 使用機材
・アナログオシロスコープ Tektronix 2225
・CooSpo HW807 心拍計アームバンド
・PS4コントローラ
・nanoKontrol2 (MIDIコントローラ)
☈ソフトウェア
・Touch Designer
(Tdにおける、オシロスコープシステムの基盤となったのはkamindustries氏のtd-scopeコンポーネントです)
☈ 制作
オシロスコープ / 心拍システム・映像 : @nagasena__
☈ イベント参加者
*全員は網羅できないので、あくまで本記録映像に見える人のみのクレジットになります。
(in order of appearance)
@ryotahirayama (DJ)
@one____two____three____ (主催)
@lovediver69 (画家・パフォーマー)
@99oyasumiyu (画家)
@utanhole (画家・ライブペインティング)